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Priifungsantrag gem. § 44 PatG ist gestellt 

<g) Verfahren und Vorrichtung zur Erfassung von 3D-Fehlstellen bei der automatischen inspektion von 
Oberflachen mit Hilfefarbtuchtiger Bildauswertungssysteme 

(57) Die Erfindung betrifft ein Verfahren und Vorrichtung zur 
Erfassung von 3-D-FehJstellen bei der automatischen In- 
spektion von Oberflachen mit HHfe* eines farbtuchtigen 
Biidauswertesystems, wobei die zu prGfende Oberfiache 
eines bewegten Pruflings gleichzeitig aus mindestens zwei 
verschiedenen Richtungen rnit Ucht unterschiedlicher Faroe, 
z. B. den Farben rot, grtin und blau, bestrahlt wird, die 
Flanken von 3-D-Fehlstelien auf der Oberfiache deshalb in 
veranderter Farbung erscheinen und vorn Bildauswertesy- 
stem mit Hilfe einer farbtuchtigen Zeilenkamera aufgrund 
der veranderten Farbung durch Auswertung von mindestens 
zwei Farbkanalen ais 3-D-Feh!steilen erfa&t und von ebenen 
Fehlstellen unterschieden werden. 
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Die Erfindung betrifft ein Verfahren zur Erfassung 
on 3D-Fehlstellen gernaB derii Oberbegriff des An- 
;;pruchs 1 und eine Vorrichtung zur Durchhlhrurig des 
Verfahrens. . 

1 . Technisches Anwendungsgebiet 

Automatische, prozeBfolgende Inspektion von OberV 
flachen auf Fehlstellen unterschiedlicher Art und Aus- ; 
pragung. Insbesondere: automatische Inspektion von 
laufenden Bahneh oder geforderteri "Stuckgutern, wo' 
3D-Fehlstellen wie Dellen, Stufen, Matefialausbruche," 
Welligkei ten oder Erhohungen ferkahnt"werden r sollen 
und simultan dazu ! auch; eb^rie Fehlsteillen, die durch"' 
farbliche Merkmale, Textiirmerkm^ 
trische Merkmale gekennzeichne t sind. ' - • 

Z Stand der Technik r ; 

Fur die automatische, prozeBfolgende Inspektion vori 
Oberflachen sind eine Vielzahl von-Bildauswertungssy- 
stemen im Einsatz, z, B. fur die automatische Inspektion 
von Papierbahnen, Folien, Geweben, Stahlband oder, 
Holz. Die meisten Systemeearbeiten mit GCD^Zeilenka-i 
meras (Grauton oder. Farbe):als*bildgeberidemi Sensor^ 
seitener werden auch Laser-AbtastereingesetzL Diese-: 
Systeme erfassen ein Bild, das zJ3. die Reflexionseigen- 
schaften der zu priifenden Oberflache wiedergibti aber 
keine direkte Information uber deren 3DrGestak ent- 
halt Im allgemeinen miissen aber: gerade Fehlstellen 
erkannt werden, die durch 3D- Merkmale gekennzeich-; 
net sind ( z. B. Dellen, Kratzer,.Materialausbrucne oder 
, rauhe Stellen. Bei marktubjichen Systemen wird ver^ 
sucht, die 3D-Fehlstellen im Bild durch eine der Aufgabe - 
angepaBte Art der Beleuchtung so gut sichtbar zu ma-, 
chen, daB sie autpmatisch detektiert werden. konnen. Im 
allgemeinen kommen aber auf Oberflachen nicht nur 
3D-Fehler . vor, sondern auch/ ebene - Fehlstellen wie 4 
Flecken oder, Verfarbungen. Zur Unterscheidung zwi- 
schen ebenen Fehlern und /3DrFehlern enthalt das so 
gewonnene Bild keine Information. D.eshalb sind Unter- 
scheidungen in jedem Fall nur mit Hilfe von Vorwissen, 
uber die Position oder das Erscheinungsbild- unter- 
schiedlicher Art en von Itehlstellen, moglich. Dies Vorger, 
hen yersagt, wenn das ;Vprwissen des Menschen sich 
nicht technisch nutzen laBt oder wenn ebene Fehlstellen^ 
im aufgenommenen Bild genausq aussehen;kdnnen wie : 
3D-Fehlstellen. In sojchen Fallen benotigt .man informa- 
tion im Bild, die : direkt mit den 3Di-Eigenschaften der 
Oberflache im Zusammenhang stent.,: ■ . - : * . J \ L 

Fur die Erfassung von : 3D-Inforrnation^ gibt es eine 
Vielzahl von Verfahren. Sie lassen sich. in zwei Klassen 
einteilen: Verfahren, die aufgrund ihres MeBprinzips 
Tiefeninformatiom erfassen -(z. B? JJehtschnittverfahren 
oder Laser-Laufzeitmessung): und Verfahren, jdie in ir- 
gendeiner Weise die Tatsache ausnutzen, dafl die Re- 
missionseigenschaften eines Oberflachenelements yon 
dessen Orientierung und Giattheit abhangen. ; Diese ' 
Verfahren werden als Streulicht verfahren bezeichnet. 
Dazu gehort auch eine.im Zusammenhang mit Laser- . 
Ab t astern eingesetze.MeBme thode : : . : ■ 

man tastet dabei die Oberflache mit einem.Laser- 
strahl ab und beobachtet das remittierte Licht gleichzei- 
tig aus verschiedenen Richtungen. Durch Vergleich der 
in den verschiedenen Kanalen gemessenen Signale laBt 
sich dann z. B. erschlieBen, ob das beobachtete Flachen- 



element eben ist oder geneigt, ob es also z. B. zu einem 
ungestorteii Gebiet einer ebenen, glatten Oberflache 
gehort oder zur Flanke einer 3D-Fehlstelle. 

Nachteile der heute bekannten Verfahren zur Erf as- 
5 sung yon 3D- Information berder automatischen pro- 
zeBfolgenden Inspektion von Oberflachen sind: 

— Verfahren zur direkten Messung von Tiefenin- 
formation sind in der Oberflachenpriifung nur in 
io Ausnahnief alien einsetzbar: sie sind zu langsam 
und/bder haben eine zu geringe Ortsauflosung 
und/oder Hohenaliflosung. — Laser-Abtaster mit 
- f . ] iriehreren Empfangskanalen sind fur die meisten 
; : > v . . Einsatzf alle zu teuer. 
is - *— Fur die Prufung von Stuckgutern gibt es Varian- 
■ ten des Streiilichtverfahrens, bei derien man vom 
[ Prufling mehrere Bilder aufnimmt und dabei das 
Objekt-bei jeder Bildaufnahme aus einer anderen 
^ Richtung beleuchtet Aus der gewonnenen Bildse- 
20 rie laBt sich fur jedes -Flachenelement des Priiflings 
- - ■ eine Aussage uber Remissions verhal ten und raum- 
nliche Orientierung- gewinnen. Voraussetzurig fur 
j m den- Eihsatz dieser Methode ist, daB der Prufling 
:* / .* < ruht r Diese Voraussetzung ist bei FlieBprozessen 
is wie, der Inspektion laufender Bahnen nicht gege- 



- f ; > 3. Mit der Erfindung ge'oste Aufgabe; Vorteile 
^ : gegenuber dem Stand der Technik 

30 : ' v ;.,.•> , 'i ' 

\ Aufgabe^ der Erfindung ist es, bei der automatischen 
Inspektion von> Oberflachen Information uber deren 

- 3D-Eigenschaften zu ge^yinnen und daneben auch noch 
Information uber den JSrauwertverlauf und die Farbe 

35 der Oberflache. 3D-Fehler wie Materialausbruche, Del- 
1; len, Stufen, Erhohungen oder abstehende Teile sollen 
-,.t eindeutig als 3D-Fehler erkennbar sein und sich von 

, ebenen Fehlstellen unterscheiden. lassen. 
,~; , :! ErfindungsgemaB wird diese Aufgabe durch das Ver- 
40 fahren nach Anspruch l und die Vorrichtung zur Durch- 
"fuhrung des Verfahrens nach Anspruch 4 gelost; vorteil- 
\ hafte L Ausgestaltungen sind in den Unteranspruchen ge- 
; kennzeichne t ^ *: ; • 

Hiernach ; wird zur Realisjerung des MeBverfahrens 
45, 1 ein farbtuqhtiges Bildauswertungssystem eingesetzt, 
j ; z. B. mit einer > farbtuchtigen Diodenzeilenkamera als 
c ; bildgebendem ; Sensor. Als kennzeichnende Erganzung 
~ r des Bildauswertesystems benotigt man lediglich eine 
( . spezielle Art der Beleuchtung, deren Einsatz gegenuber 
so -den ublichen Beleuchtungsverfahreri entweder gar kei- 
nen oder ; nur ^ einen relatiy geringen, Mehraufwand be- 
: "deutet:-. Die Signalauswertung. ^ und ^ Erkennung von 

- 3D-Fehistellen eriFolgt dabei z, B. durch den im farbtuch- 
tigen Bildauswertesystem ohnehin vorhandenen Farb- 

55 klassifikator. Im Gegensatz etwa zum Lichtschnittver- 
fahren wird dabei die Information uber 3D- Fehlstellen 
mit der vollen Ortsauflosung der Bildaufnahme gewon- 

- . nen.~Eine direkte Vermessung des Oberflachenreliefs ist 
. 'jallerdings nur in Ausnahmef alien moglich. , 
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: 4. Losungsweg 



Man beobachtet die zu priifende Oberflache mit einer 
; Farbkamera, z. B. mit einer Farbzeilenkamera, Mit Hilfe 
65 j einer Farbkamera gewinnt man von jedem Punkt der zu 
: priifenden Oberflache paBgenau 3 MeBwerte, und zwar 
La, die Farbausziige "rot", "grim" und "blau". Bei Be- 
leuchtung der Oberflache mit weiBem Licht ist das Er- 
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gebnis ein Bild, auf dem die Oberflache in naturlichen 
Farben wiedergegeben wird 

Um 3D-Fehlsielleh auf. der Oberflache erkennen zu 
k6nnen f beleuchtet man nun erflndungsgemaB den Pruf- 
: ling mit mindestens zwei Lichtquellen, die. mit unter- 
schiedlicher Farbe aus, unterschiedlicheh Richtungen 
auf die Oberflache einstrahlen (siehe Figs/l, 2 und 3). Bel 
dieser Art von Beleuchtung bewirken 3D-Fehlstellen 
auf der Oberflache ein e Verschiebung.der Balance zwi- 
schen den Farbkanalen bei der Bildaufnahme. Dafiir 
sind zwei unterschiedliche ; Effekte : yerantwortlich: 
Schattenwurf und die Abhangigkeit der Remjssionskeu- 
le von der N eigung der Oberflache. v _ ! f , % 

In Fig. 1 sind die Verhaltnisse fur eine geneigte Ober,- 



Risse werden nicht erkannt. 

Im Ausfuhrungsbeispiel nach Fig. 3 ist die Richtung 
der Beleuchtung gedreht: sie erfolgt jetzt mit einer star- 
ken Richtungskomponente quer zur Transportrichtung. 
5 Darnit werden Fehlstellen besonders gut dargestellt, die 
in Transportrichtung orientiert sind. 
* Realisiert ist die Beleuchtung im Beispiel durch eine 
Lichtieiteroptik 1 mit einer zentralen Lichtquelle 2. Das 
Licht wird iiber die Koppeloptik 3 in die Lichtleiter 
io eingekoppelt Die Koppeloptik enthalt Filter, mit deren 
. - Hilfe Farbton und Intensitat der beiden Arme der Licht - 
■ ^ leiteroptik 1 getrennt voneinander, bestimmt werden 
. kann. Das Licht tritt aus den beideh Arrnen der Lichtlei- 
: teroptikfSchrag aus- und zwar jeweils mit einer starken 



flache gezeichnet, und zwar fur ein • flaehenelement am; jiseKomponente quer ?zur Transportrichtung der Bahn. 
rechten Rand einer Delle. Die Oberflache wird von zwei- , j Purch. die ; Anordjiung mit t einer zentralen Lichtquelle 



Lampen, LI und L2, aus unterschiedlichen Richtungen i; 
beleleuchtet,,wobei z. R die Lampe LI rot und die Lam- . 
pe L2 blau sein mbge. Das von der Lampe, LI kommen- 
de Licht wird vom betrachteten Element der Oberflache 
entsprechend der Remissionskeule Rl zuruckgeworfen, 
das von der Lampe L2 kommende Licht gemaB R2. 
Wahrend bei ebener Oberflache Rl und R2 annahernd , 
.symmetrisch zueinarider waren, hat hier.RLwegen derv;; 



^wir4 verrnieden,;daB Intensit^Uchwankungen der Licht- 
;r - queUe zu;Stprungen der f Balance zwischen den Farbka- 
nalen fuhren.;, r : , % . 
20 Fig. 4 zeigt eine Veraligemeinerung der Anordnun- 
gen nach Fig^lr:Flg."2^und Fig. 3: hier erfolgt die Be- 
leuchtung simuitan aus drei Richtungen. Damit wird die 
- : . fur die ; yorigen Aflbxdnungen gegebene starke Abhan- 
;?gigkeit:der Erkennungssicherheit von der Orientierung 



annahernd erfullten Reflexions vbedingungfstarke ICom->-2Sf dert FeMsteilen jdeutlichE.vermindert Fur dia Realisie- 
ponenten in Richtung auf die Kamera, R2 nurschwache. . ; rung *einer: $okhen, Beleuchtung kann man analog zu 
Fur den auf die Farbe von LI abgestimmten (roten)/ ■ ? • 

Kanal der Kamera erscheint dies Flachenelement alsov, .v. ^Fur die Auswertung^der .aufgenornmenen Bildinfor- 
besonders hell und fur den* auf I^-abgestimrhten (blau-^a^u matiorr kanm man : einen'Farbkiassifikator nach Fig. 5 
en) Kanal besonders dunkel Das betrachtete Flachen-* 30 ^'einsetzenr-tiach ein eis Trainingsphase: entscheidet der 
element wird also im Beispiel deutlich rot erscheinen^ ~ - ; FarbMkssifikat&r jeden-* Bildpunkt ~kbntextfr ei auf- 
Fig. 2 zeigt einen entspre^henden > Effekt, der aber -"■ gz&nd' de& RGS-FatbwerteS auf T "i.O" (einwandfrei 
durch Schattenwurf zustahBe-komrhf: Bei eine>r Stufe ist* " Obe&ache) r gEF? ^ebener Fehter) bder "3D" (3D-Feh- 
die Balance zwischen deri Beobachtun^kanaien im ^ ^ler)>Alsi3D^ 

Halbschatten HS1 uridTI32 rr an deh RaMerti der : Stufe AbWeichurig^ vbn : der ebenen Oberflache gekennzeich- 
stark versehoben, im- Bild - erscheinen* dbrt ; deutliche* - 7 het ;auT-emd Sc4ia^ung dey 
Farbsauirie. Entspreche^^ ' • 1 

ier sind im-aufgenomfnenen Bild also als^Farbverande- " Fig. 6 r ^;eigt7diie StruRtur ernes' weitergehenden Aus- 
rungen erkennban Es leuchtet sofbrt em^ daB ^an die* 1 ' werteverfarirensVHier wird die^irn-aiafgenommenen Bild 
geschilderte Methocie ^ ^urTrufurig-eirifarbiger Oberfla- :; 4b uiitter -gewissen Vbraussetzungen^enthaitene^ Informa- 
chen gut nutzen katiiv'daB sie aber bei der Prufung vorf /? tlbn Qber* die : ^eigunjg* der Oberflachenel'emente ge- 
Oberflachen mit -beliebtgem TaTbehreichtum , versagen ; v " nutzt unt'eirie Schatzuflg. uber den Verlauf des Oberfla- 
miiB. In der Oberflachenprufung ist ^ def FarBehreiehtu^^ >^ cherireliefs zu gewinneri. Aus cfer* Abfolge' de"r Halb- 
der zu prufenden Oberflache aber i.ai fi eiBgeschrankt; : -"schatteri 'HS^ und "HS2 in" Fig. 2 i is^ f £Weihdeutig zu 



" z. B. bei Metalleri; Kuris tstof f ehV lackiert en OberflSchen ' ' -45 erkennen; daB es : sich bei dem vorliegehden ^D- Fehler 
oder von : Holz. Hdlzbberflach^rt i *etwa' • sind ; I?, eirige- * " iim eine Erhdhung handeln rhiiB — bei einer Ve'rtiefung 
schrankt farbi^: sie spielen- in Wrschiedene^ Braunto- der 
nen urid es gibt -naturlJche FarbfeMe^ : wfe j Blaue oder l -- : >Breite'der HalbSchatteri'HSl und'HS2 irfi Bild Iafit sich 
Rotstreif; i Grum6ne r aber"kbmrrieri;z.B. nibht vor. Bei ! ;' f : dar^Defhiriaus 'auf die Hdhe-'der vorliege'rid^n Stufe 
solcheh ,, eingesch^ahkt J fa^bigfen ,, '• Oberflacheri c ist di6 ^ ^0 ^schlie'BefcTfinzipiell'laBt sich bei Kerintnis der Remis- 
Methode durchau^eiri^etzbafP Mit^emerri em der Oberflache aus deni Verhaltnis 



trainierteri Fabklassiflkator laBt sich ffir jeden Bildpunkt" 
entscheiden, ob er zur einwahdfreien OberflSche, zu ei- 
: riem ebeheh'Fenler dder zu einem SDiFehlef geh'ort e - • 

' ■■'*.. G ^ 'K ' 

"\' ' 5. Ausfuhrungsbeispiele : 

Fig. 1 und Fig. 2 zeig£n ein AusfOhfungsbeiSpiel fur 
eine OberflachenprQfung rnit Hilfe einer farbtuchtigen 



der geriiessenen Intensitaten in ( den einzelnen Kanalen 
auf die Neigungder Oberflachenelemente schlieBen und 
bei K'enritnis ' ; der Neigurig laBt sich durch Integration 
55 iiber- die NeigungM das Relief - der Oberflache gewin- 
y - nen. % • • " : ''< m . . ., .. ■ 

\Oas ahgegebene .KleBverfahren kann in der Praxis 
wegen der schwankenden Remissionseigenschaften der 
zu ^rQfenden Oberflache nur Schatzwerte fiir die Nei- 
Zeilenkamera und zwei ^Lampen, Hie hier-als 'Leucht- ; 60 'gung von-Oberflachenelementen lie fern. Das in Fig. 6 



stoffrbhren LI und L2 mit unterschiedlicher Farbe (z; B: 
"Blau" und "Rot") gezeichnet sind. Die Transportrich- 
tung geht nach links, die Zeile und die Leuchtstoffrohren 
sind quer zur Transportrichtung orientiert 

Aufgrund der geometrischen Anordnung^ von Lam- ■ 
pen und Kamera sind mit diesem MeBaufbaii quer zur 
Transportrichtung orientierte Fehlstellen gut zu erken- 
nen, langs zur Transportrichtung orientierte Stufen oder* 
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gezeigte Verfahren zu Bestimmung des Oberflachenre- 
liefs mu3 deshalb neben 'dem Vorwissen uber das Re- 
. missionsverhalten der Oberflache auch Kontextinfor- 
mation nutzen, z. B. im Rahmen eines Relaxatiohsver- 
fahrens. - : • :-j . " 
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5 

Patentanspruche 

1. Verfahren und Vorrichtung zur Erfassung von 
3D-Fehlstellen bei der automatischen Inspektion 
von Oberflachen mit Hilfe eines farbtuchtigen Bild- 5 
auswertesystems dadurch gekennzeichnet, daB 
die zu prufende Oberflache eines bewegten Pruf- 
lings gleichzeitig aus mindestens zwei verschiede- 
nen Richtungen mit Licht unterschiedlicher Farbe, 

z. B. den Farben rot, gruh und blau, bestrahlt wird, 10 
die Flanken von 3D-Fehlstellen auf der Oberflache 
deshalb in veranderter Farbung erscheinen und 
vom Bildauswertesystem mit Hilfe einer farbtuchti- 
gen Zeilenkamera aufgrund der veranderten Far- 
bung durch Auswertung von mindestens zwei 15 
Farbkanalen ais 3D-Fehisiellen erf aBt und von ebe- 
nen Fehlstelleri unterschieden werden. 

2. Verfahren nach. Anspruch 1. dadurch gekenn- J, ]" 
zeichnet, daB die Unterscheidung zwischen ein- 

wandfreier Oberflache (i.O.), ebenen Fehlstellen 20 
(EF) und 3D-Fehlstelleh (3D) von einem Farbklassi- 
fikator nach Fig. 5 vorgenommen wird, der zuvor 
auf das Aussehen der einwandfreien Oberflache 
und von ebenen Fehlstellen trainiert wurde. 

3. Verfahren nach Anspruch 1 dadurch gekenn- 25 
zeichnet, daB durch Auswertung von Art, Intensitat 
und geometrischer An'Qrdnung der fur 3D-Fehler 
kennzeichnenden Verfarbungen von Bildhereichen 
auf die Art yon 3D-Fehlerff wie z. B. Erndiuing oder 
Vertiefung und auf dereiL Auspragung zuruckge- 30 
schlossen wird. — 

4. Vorrichtung zur Durchfuhrung der Verfahren 
nach den Ansprttchen 1—3 dadurch gekennzeich- 
net, daB zwei verschiedenfarbige Lampen (LI, L2), 

z. B. Leuchtstof frdhren, quer zur Transportrichtung 35 
des Pruflings so angeordnet sind, daB die von der 
farbtuchtigen Zeilenkamera beobachtete MeBlinie 
von den beiden Lampen schrag aus unterschiedli- 
chen Richtungen bestrahlt wird, und zwar in Trans- 
portrichtung und entgegen der Transportrichtung. 40 

5. Vorrichtung zur Durchfuhrung der Verfahren 
nach den Anspruchen 1—3 dadurch gekennzeich- 
net, daB nur eine Lampe (2) vorgeseKen ist, deren 
Licht uber eine applikationsspezifisch friit Farbfil- 
tern ausgestattete Koppeloptik (3) in zwei Lichtiei- 45 
termodule (1) eingespeist wird und nach Austritt 
aus den Lichtleitermodulen die von der Kamera 
beobachtete MeBlinie schrag £>eleuchtet, und zwar 
im Unterschied zu der Vorrichtung nach Anspruch 

1 mit einer starken Richtungskomponente quer zur 50 
Transportrichtung. ' - 

6. Vorrichtung zur Durchfuhrung der-Verfahren ; *' -\ 

nach den Anspruchen 1^-3 dadurch gekennZeich- - - ^ 

net, daB die zu prufende Oberflache z. B. mit Hilfe 

einer analog , zum Aufbau nach FjgT3 gestalteten 55 
Lichtleiteroptik aus 3 Richtungen beleuchtet wird, 
und zwar so, daB ini Unterschied zu den Anordnun- 
gen nach deri Anspruchen 4 und 5 die Flanken be- 
liebig orientierter Fehlstellen in jedem Fall durch 
Verfarbungen kenntlich werden v eo 
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